حسگر‌های کشش که می تواند صحبت‌های خاموش ناشنوایان را شناسایی کند

محققان کره جنوبی یک سیستم شناسایی صحبت خاموش ابداع کرده اند که کمک حسگر‌های کشش و الگوریتم هوش مصنوعی می‌تواند حرکات صورت را ردیابی و واژگان را شناسایی کند.

به گزارش مجله خبری نگار به نقل از اینترستینگ انجینرینگ، این ابداع جدید برای کمک به افراد کم شنوا است که نمی‌توانند همیشه با کمک زبان اشاره با افراد دیگر ارتباط برقرار کنند. همچنین می‌توان در حوزه نظامی و زمانی که ارتباطات رادیویی به دلیل سروصدای محیطی پیچیده می‌شود، از این دستاورد استفاده کرد.

هنگام ادا شدن کلمات در دهان فرد، فناوری مذکور با استفاده از حسگر‌های کشش هرگونه انبساط و انقباض در صورت را ردیابی می‌کند و در مرحله بعد از یک الگوریتم یادگیری عمیق برای تبدیل حرکات صورت به کلمات استفاده می‌شود.

تائمین کیم از دانشکده مهندسی برق و الکترونیک یونسی در این باره می‌گوید: حسگر‌های کشش که به صورت متصل می‌شوند، هنگام صحبت فرد کشیده یا کوتاه می‌شوند. ویژگی‌های الکتریکی این حسگر‌های فشار نیز برحسب همین موارد تغییر می‌کند.

این سیستم تاکنون توانسته مجموعه‌ای شامل ۱۰۰ لغت را شناسایی کند و دقت آن نیز ۸۸ درصد اعلام شده است. حسگر‌های مذکور همچنین در برابر عرق و چربی پوست مقاوم هستند. جالب آنکه این ابزار‌ها در مقایسه با دستگاه‌های مشابه اندازه کوچکتری دارند.

کوچکتر بودن حسگر به معنای آن است که حسگر‌های بیشتری را می‌توان روی صورت فرد به کار برد و در نتیجه واژه‌های ادا شده را بهتر می‌توان درک کرد.

کیم در این باره می‌گوید: برای طبقه بندی و شناسایی اصوات بیشتر، به اطلاعات با وضوح بیشتری نیاز است. به همین دلیل محققان اکنون سعی دارند یک سیستم خوانش صحبت خاموش ابداع کنند که حسگر‌های کشش قابل پوشیدن را با مدار‌های یکپارچه ترکیب کند که به طور نرمال در تولید نمایشگر یا نیمه رسانا به کار می‌رود. اگر بتوانیم مقدار اطلاعات را افزایش دهیم، سیستم می‌تواند واژه‌ها و جملات بیشتری را شناسایی کند، پیش بینی می‌کنیم در آینده افرادی با اختلالات زبانی بتوانند در زندگی روزمره به راحتی محاوره کنند.

این تحقیق در نشریه نیچر کامونیکیشنز منتشر شده است.

لینک کپی شد

منبع: مهر

اشتراک‌ گذاری